Tuy nhiên tin đồn vẫn tiếp diễn nhiều năm cho rằng James đã sống sót và đã bị lưu đày, hoặc di hài của ông thực chất được chôn cất tại Scotland, nhưng không có bằng chứng để chứng minh. Hai lâu đài ở Borders Scotland được tuyên bố là nơi an nghỉ thực sự của James. Những câu chuyện này theo truyền thuyết cho rằng, trước khi thua trận tại Flodden, James đã cởi áo choàng của mình để biểu thị rằng ông đã chuẩn bị để chiến đấu như một người bình thường. Cơ thể tại Anh của James IV không có những chuỗi dây xích bên vòng eo của mình. (Vì vậy, một số nhà sử học khẳng định rằng anh bỏ chuỗi của mình trong khi trong phòng ngủ của Lady Heron). Tuy nhiên, Border tuyên bố rằng trong trận Flodden bốn kỵ binh đua nhau thâu tóm xác của vua để giành giải thưởng, vì thế như vậy không thể phép rơi vào tay Anh sau thất bại nhục nhã như vậy, hoặc là nhà vua phải rời khỏi trận chiến hoặc bị giết ngay sau đó. Trong thế kỷ thứ XVIII, khi một cái giếng giếng thời trung cổ được đào lên, có bộ xương của một người đàn ông với một chuỗi xích đeo ở vòng eođã được phát hiện trong một hang động. Thật không may bộ xương này đã biến mất. Một phiên bản khác của câu chuyện này có bộ xương được phát hiện tại Hume một vài năm sau cuộc chiến và tái chôn cất tại Holyrood Abbey. Chính xác cùng một câu chuyện đã được kể cho Roxburgh Castle, bộ xương có phát hiện trong thế kỷ 17.[21].